Rule-Compliant Visual Spatial Planning for Multimodal Large Language Models
面向多模态大语言模型的规则遵循视觉空间规划
🧭 多模态大模型规则遵循空间规划
Peking University · Yinwang Intelligent Technology Co., Ltd
提出RuleMaze基准和DMP方法,解耦感知、执行与规则验证,提升MLLM在规则约束下的空间规划与泛化
📌 工作参考价值(4 点)
- 可借鉴DMP的解耦设计:将感知、执行、规则验证拆分为独立模块,便于在业务Agent中注入可解释的合规性检查,避免端到端黑盒违反约束。
- 使用Language-Logic-Function Hybridization自动生成规则并转化为逻辑验证器,可复用于构建带约束的策略评测集或训练数据,降低人工构造规则成本。
- 在需要严格遵循业务规则的Agent任务(如营销活动路径规划、多步骤推荐流程、广告投放策略)中,分离式规划能提供中间轨迹,便于调试和规则动态更新。
- 论文场景为迷宫导航,与推荐系统核心链路距离较远,但规则验证与执行解耦的思想可作为构建可信Agent系统的参考。